Iteration	Timesteps in episode
0	1000
1	1000
2	1000
3	1000
4	1000
5	1000
6	1000
7	1000
8	1000
9	1000
10	1000
11	1000
12	1000
13	1000
14	1000
15	1000
16	1000
17	1000
18	1000
19	1000
20	1000
21	1000
22	1000
23	1000
24	1000
25	705
26	1000
27	1000
28	1000
29	1000
30	524
31	199
32	312
33	449
34	163
35	159
36	191
37	170
38	362
39	1000
40	154
41	144
42	156
43	149
44	139
45	154
46	193
47	890
48	258
49	140
50	155
51	157
52	161
53	168
54	206
55	160
56	160
57	186
58	168
59	163
60	163
61	165
62	165
63	165
64	164
65	163
66	163
67	163
68	163
69	162
70	163
71	162
72	161
73	160
74	159
75	158
76	158
77	156
78	156
79	155
80	155
81	154
82	154
83	154
84	154
85	154
86	152
87	150
88	150
89	150
90	153
91	153
92	153
93	153
94	153
95	153
96	153
97	153
98	152
99	152
100	152
101	152
102	152
103	152
104	152
105	152
106	152
107	147
108	147
109	147
110	147
111	103
112	103
113	103
114	103
115	103
116	103
117	103
118	103
119	103
120	103
121	103
122	103
123	103
124	103
125	103
126	103
127	103
128	103
129	103
130	103
131	103
132	103
133	103
134	103
135	103
136	103
137	103
138	103
139	103
140	103
141	103
142	103
143	103
144	103
145	103
146	103
147	103
148	103
149	103
150	103
151	103
152	103
153	103
154	103
155	103
156	103
157	103
158	103
159	103
160	103
161	103
162	103
163	103
164	103
165	103
166	103
167	103
168	103
169	103
170	103
171	103
172	103
173	103
174	103
175	103
176	103
177	103
178	103
179	103
180	103
181	103
182	103
183	103
184	103
185	103
186	103
187	103
188	103
189	103
190	103
191	103
192	103
193	103
194	103
195	103
196	103
197	103
198	103
199	103
200	103
201	103
202	103
203	103
204	103
205	103
206	103
207	103
208	103
209	103
210	103
211	103
212	103
213	103
214	103
215	103
216	103
217	103
218	103
219	103
220	103
221	103
222	103
223	103
224	103
225	103
226	103
227	103
228	103
229	103
230	103
231	103
232	103
233	103
234	103
235	103
236	103
237	103
238	103
239	103
240	103
241	103
242	103
243	103
244	103
245	103
246	103
247	103
248	103
249	103
250	103
251	103
252	103
253	103
254	103
255	103
256	103
257	103
258	103
259	103
260	103
261	103
262	103
263	103
264	103
265	103
266	103
267	103
268	103
269	103
270	103
271	103
272	103
273	103
274	103
275	103
276	103
277	103
278	103
279	103
280	103
281	103
282	103
283	103
284	103
285	103
286	103
287	103
288	103
289	103
290	103
291	103
292	103
293	103
294	103
295	103
296	103
297	103
298	103
299	103
300	103
